Методы аудиовизуального распознавания людей в масках
Аннотация:
Предмет исследования. В современном мире очень распространены случаи ношения людьми различных масок, респираторов и одежды на лице. Начавшаяся в 2019 году пандемия новой коронавирусной инфекции существенно увеличила применимость масок в общественных местах. Наиболее эффективными способами бесконтактного распознания личности являются методы идентификации и верификации человека по изображению лица и по записи голоса. Автоматические системы распознавания личности столкнулись с новыми проблемами из-за перекрытия большей части лица маской. Наличие данной проблемы определяет актуальность исследований в области распознания лиц в масках. Предмет исследования работы — системы и корпусы данных для распознавания личности людей в масках. Метод. Рассмотрены и проанализированы основные современные подходы и методы распознавания личности людей в масках, использующие изображения лица, записи голоса человека и аудиовизуальные методы. Приведен сравнительный анализ существующих корпусов данных, содержащих изображения и записи голосов людей, необходимые для создания систем распознавания личности. Основные результаты. Результаты анализа показали, что среди методов, использующих изображения лиц, наиболее эффективными являются методы, построенные на основе сверточных нейронных сетей, которые применяют область маски для извлечения признаков о геометрии лица. Популярные методы на основе x-векторов показали незначительное падение эффективности, что позволяет сделать вывод об их применимости в задачах распознавания личности говорящего в маске. Практическая значимость. На основании полученных выводов сформулированы требования к перспективным системам распознавания личности и определены актуальные направления для дальнейших исследований в данной области.
Ключевые слова:
Постоянный URL
Статьи в номере
- Влияние соотношения интенсивностей опорной и объектной волн на распределение интенсивности в формируемом с их помощью голографическом поле
- Высокоточный волоконно-оптический датчик температуры на основе интерферометра Фабри–Перо с отражающими тонкопленочными многослойными структурами
- Метод проектирования оптической системы для концентрации излучения мощных светодиодов
- Обнаружения выбоин на дорожных покрытиях с использованием методов фотограмметрии и дистанционного зондирования
- Адаптивное управление нелинейным объектом с несогласованными параметрическими неопределенностями и ограничением на входное воздействие
- Применение методов детектирования отказов для обнаружения информационных атак на систему управления
- Алгоритм детектирования и локализации отказов двигателя постоянного тока
- Синтез и реализация λ -подхода скользящего управления в системе теплопотребления
- Фотокаталитические свойства наноструктур Ag–AgBr в ионообменном слое натриево-цинк-алюмосиликатного стекла с бромом
- Формализация языков частично упорядоченных мультимножеств в системе Coq для спецификации слабых моделей памяти
- Облачная интеллектуальная система мониторинга для обнаружения нарушений маски и выдачи предупреждений
- Эффективная инкрементная хеш-цепочка с вероятностным методом на основе фильтра для обновления легких узлов блокчейна
- Метод генерации масок на изображениях лиц и системы их распознавания
- Повышение эффективности обработки жестового языка посредством малокадрового машинного обучения
- Комплекснозначное разложение матричных данных на принципах квантовой теории
- Моделирование базового переводчика индонезийского языка жестов на одноплатном компьютере Raspberry Pi
- Метод многомодального машинного сурдоперевода для естественного человеко-машинного взаимодействия
- Веб-приложение для быстрой оценки субъективных ответов с использованием обработки естественного языка
- Обоснование путей построения и оценка эффективности применения пространственно распределенной системы информационных сенсоров для мониторинга обстановки
- Мониторинг инфильтрационных процессов в гидротехнических сооружениях с использованием распределенного акустического сенсора
- Конструкция волноводной антенны с прорезями для морской радиолокационной системы